【缘起】 最近两个月的工作重点是学习CDH（Cloudera's Distribution Including Hadoop）的安装部署和使用。在阅读CDH的官方文档时， ...

GraphLab是CMU（卡耐基梅隆大学）开发的一个以vertex为计算单元的大规模图处理系统，是继google的Pregel之后的第一个开源的大规模图处理系统，它解决了传统mapreduce框架对于 ...

近期的一项任务是对比Hadoop和Spark两种分布式计算框架的迭代性能，为了更加充分合理地管理集群中的资源，用到了mesos这种资源管理平台。mesos最初是UC Berkeley A ...

mesos的具体安装过程可以参考我的上一篇日志《mesos安装总结》。 安装Spark之前要在所有的主机上先安装JDK和Scala。JDK的安装过程就不赘述了。下面简单介绍一下Scala 2.9.2 ...